Unifying Generative Recall and Multi-Objective Ranking in a Single Decoder-Only Sequence
统一生成式召回与多目标排序的单解码器序列模型
🧭 生成式推荐 · 统一召回排序 ★ 深度解读
Institute of Information Engineering, Chinese Academy of Sciences · University of Chinese Academy of Sciences · Kuaishou Technology
用单个解码器Transformer和双查询前缀因果注意力统一生成式召回与多目标排序，表示耦合而优化隔离
📌 工作参考价值（4 点）
- 统一序列设计可迁移：将用户上下文、SID 生成轨迹、商品特征拼接为一个异构序列，在电商/广告的生成式召回+排序场景中可直接借鉴，消除两段式冗余编码，并且让排序阶段能直接消费召回轨迹中的语义信息，而不是只拿离散候选列表。
- 双查询前缀因果注意力 (DQ-PCA) 实现任务隔离：为召回分支提供前缀因果可见性，为排序分支提供双向注意力但仅关注用户画像和生成轨迹，同时共享基础注意力权重。这种设计能有效防止排序梯度干扰自回归生成，适合电商多任务联合训练。
- LoRA 作为优化隔离的低成本适配手段：在基础 Transformer 上冻结生成主路径，仅通过 Low-Rank 适配器为排序侧提供任务专用表示学习，既保护了生成式召回的质量，又恢复了排序侧的深层特征交互能力，对电商的稀疏目标（如赠礼、收藏）提升显著。
- 推理缓存复用与并行化部署：生成召回阶段计算的用户上下文和 SID 轨迹 KV 缓存可直接传给排序阶段复用，与外部策略过滤并行执行，大幅减少推理延迟（实验中减少 54% 推理时间），适合大规模电商/直播推荐系统的在线服务降本增效。